MyPCBench: A Benchmark for Personally Intelligent Computer-Use Agents
MyPCBench: 个性化计算机代理评测基准
🧭 个性化Agent评测 · 桌面环境
Carnegie Mellon University
首个模拟真实用户数字生活的个性化计算机代理基准，揭示跨应用长链任务的高失败率
📌 工作参考价值（4 点）
- 在电商Agent评测中，可类似构建含用户历史订单、偏好、收货地址的模拟桌面/浏览环境，使评测更贴近真实部署。
- 关注长链跨应用任务（如搜索商品→比价→下单→售后）的评估，模型在这些场景下易失败，需专项优化。
- 引入用户数字踪迹（日历、邮件、聊天记录）作为上下文，可能提升Agent个性化表现，但评测显示当前模型仍难以有效利用。
- 对于需要登录态或隐私数据的工作流，离线模拟环境比在线评估更安全且可重复。